(Not Yet Finish)

大數據接收

Kinesis 資料接收

Kinesis

Video Stream

Data Stream

Shard 越多， Stream 數據乘載越強

SWF

Amazon Simple Workflow Service (SWF)
Amazon SWF 可協助開發人員建置、執行和調整以平行或連續步驟進行的背景任務。您可以將 Amazon SWF 想成是一個在雲端中全受管的狀態追蹤器和任務協調器。

如果應用程式的步驟需要 500 毫秒以上才能完成任務，您需要追蹤處理的狀態，並在任務失敗時恢復或重試，這時 Amazon SWF 就可以提供協助。

物聯網

怎麼選擇 Kinesis 或是 SWF ?

大數據操作

EMR (Elastic Map Reduce)

EMR 資料處理

大數據解決方案 Hadoop 的 雲端版

執行大數據的任務

整理後的資料何去何從?

轉存到 S3

轉存到 Redshift

大數據倉儲

Recap: 若使用到 EBK，因為大數據情境下注重的是傳輸量

Redshift 資料倉儲

• Redshift

  • 資料分析用的大數據資料倉儲

  • 資料倉儲

    • 儲存密集

  • 資料分析

    • 運算密集

  • column-base 的叢集化資料庫

Redshift 跟 Aurora 我應該用誰

• Redshift 對應 大數據倉儲